DERS 7 


En Küçük Kareler Yöntemi 


7.1. En Küçük Kareler Yöntemi. Gerçek yaşamın çeşitli alanlarında herhangi bir uygulama 
ile toplanan veriler tablo şekline getirilerek incelenir ve toplanan veriyi modelleyen bir 
fonksiyon bulunmaya çalışılır. Çoğu zaman bu veri tablosuna tam olarak uyan bir fonksiyon 
bulmak mümkün olmaz; veri tablosuna en iyi uyan fonksiyon belirlenmeye çalışılır. Bir veri 
tablosuna en iyi uyan fonksiyonu bulma sürecine regresyon analizi denir. 

Regresyon analizi yaparken en çok kullanılan yöntemlerden biri en küçük kareler 
yöntemidir. Büyük matematikçi C. F. Gauss’un 18 yaşındayken (1795) geliştirdiği bu 
yöntem, ilk kez 1801 de Gres astroidinin yörüngesinin belirlenmesinde kullanılmış ve ilk kez 
Gauss’un toplu eserlerinin yayınlandığı ciltlerden İkincisinde 1809 yılında yayınlanmıştır. 
Fransız matematikçi A. Legendre 1805 ve Amerikalı matematikçi R. Adrain de 1808 
yıllarında aynı yöntemi Gauss’dan habersiz ve bağımsız olarak keşfetmişlerdir. 

En küçük kareler yöntemi, tıp, fınans, mühendislik, ziraat, biyoloji ve sosyoloji gibi çeşitli 
bilim dallarında çeşitli değişkenler arasındaki ilişkiler belirlenirken kullanılan en önemli 
araçlar arasındadır. 

Belli ölçümler sonucunda/= 1, 2, . . . ,n için (x l , yi) verileri elde edilmiş olsun. Burada, 
her bir y t nin jc,- ye bağlı olarak değiştiği varsayılmaktadır. (x, , yi) düzlemde noktalar 
olarak düşünüldüğünde, pratikte bu noktalar düzgün bir eğri üzerinde, başka bir deyimle, 
bilinen bir fonksiyonun grafiği üzerinde bulunmazlar. Hatta bazı durumlarda, (v, , yi) 1er 
arasında ne tür bir bağıntı bulunduğu dahi bilinmeyebilir. Ancak, yapılan ölçümlerin doğası 
gereği, her i = 1, 2, . . . , n için y t =/(jc,-) olacak biçimde bir fonksiyonun var olduğu, 
ölçümlerde yapılan hata nedeniyle bu eşitliklerin bazıları veya hepsinin sağlanmadığı kabul 
edilebilir. Bu düşünceyle, ölçülen v, değeri / (x, ) için yaklaşık değer kabul edilerek bu 
yaklaşımdaki hatanın minimum olduğu / fonksiyonu belirlenmeye çalışılır. Bu amacı 
gerçekleştinnek için / fonksiyonunun bir takım parametrelere bağlı bir ifadesi bulunduğu 
varsayılıp eldeki veriler yardımıyla bu parametreler belirlenmeye çalışılır. Örneğin, / fonk¬ 
siyonu 


y =/(*) = mx + b 

ifadesinde olduğu gibi bir doğrusal fonksiyon veya 

y = f (x) = ax 2 + bx + c 

ifadesinde olduğu gibi bir karesel fonksiyon olabilir ki bu durumda belirlenmesi gereken 
parametereler a, b , c , m dir. 
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Vi değeri /(x, ) için yaklaşık değer, / (x, ) « y ,, kabul edilince yapılan hata 


yt -ifa) 


dir ve amaç, bu hatalar minimum olacak şekilde bir / fonksiyonu bulmaktır(Aşağıdaki 
şekilden izleyiniz). 



Tanım 1. y { - f(xi ) farklarından her birine bir artık denir. 

En küçük kareler yönteminde aranan fonksiyon, ya da onun parametreleri, tüm artıkların 
kareleri toplamı olan 


Sev,- ~f( x i )) 2 = Ce - /(e )) 2 + ••• + (y„ -f (* n )) 2 
1=1 

ifadesini minimum yapacak şekilde belirlenir. Bu, yönteme neden en küçük kareler yöntemi 
dendiğini açıklar. Sözü edilen kareler toplamının minimum olması için her bir hatanın küçük 
olması gerektiğine dikkat ediniz. 

Bu dersimizde, bir veri tablosuna en iyi uyan doğrusal fonksiyonların bulunmasında en 
küçük kareler yönteminin nasıl kullanıldığını örnekleriyle göreceğiz. 

Tanım 2. Bir veri tablosuna en iyi uyan doğrusal fonksiyonun grafiği olan doğruya 

regresyon doğrusu veya en küçük kareler doğrusu denir. 
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7.2. Regresyon doğrusu. Her ı = l,2, . . . , n için (x, , y,) verilmiş olsun. Şimdi, bu 
verilere en iyi uyan 


y = / CÖ = mx + b 

fonksiyonunun belirlediği doğruyu yani regresyon doğrusunu nasd bulacağımızı göreceğiz. 
Önce y. - f (x ) artık değerleri bulunarak bunların karelerinin toplamı olan 

rı 

F(m,b) = Yj (v, - mx, -bf = (v, -mx l -b) 1 + ■■■ + (y n -mx n -bf 

i =1 

fonksiyonu oluşturulur. Her m ve b için F(ın , b)> 0 olduğundan ve y =f(x) = mx + b 
doğrusu verilen noktalardan uzaklaştıkça F(m , b) sonsuza ıraksayacağından, F(nı , b ) nin 
bir mutlak minimum değeri vardır ve bu minimum değer F(m , b) fonksiyonunun bir kritik 
noktasında ortaya çıkar. 


Örnek 1. Bir üretici, ürettiği ürünün çeşitli üretim seviyeleri için maliyetini belirliyor ve 
aşağıdaki tabloyu oluşturuyor: 


Ürün sayısı (x yüz ) 

2 

5 

6 

9 

Maliyet (y bin YTL ) 

4 

6 

7 

8 


Bu üretici için gider fonksiyonunu yukarıdaki tabloya en iyi uyan doğrusal fonksiyon olarak 
belirleyelim. 

Elimizdeki veri tablosu, düzlemde şu (x,y) noktalarını verir: (2,4) , (5,6) , (6,7) ve (9,8). Bu 
noktaların hepsini üzerinde bulunduran bir doğru yoktur. Amacımız, bu noktalara en iyi uyan 
doğruyu, yani regresyon doğrusunu bulmaktır. Regresyon doğrusunun denklemi 

y=C (x) = mx+b 


m ve b belirlenerek bulunacaktır. 

Artıkları hesaplayalım ve veri tablomuzu aşağıdaki gibi genişletelim. 


Ürün sayısı ( x yüz ) 

2 

5 

6 

9 

Maliyet (y bin YTL ) 

4 

6 

7 

8 

mx +b 

2 m + b 

5 m + b 

6 m + b 

9 m + b 

y - mx - b 

4 - 2 m - b 

6- 5 m - b 

7- 6 m - b 

8 - 9 m - b 
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Artıkların kareleri toplamı aşağıdaki iki değişkenli fonksiyonu tanımlar: 

F(m,b)=(4-2m-b)2 + (6-5 nı-b)^ +(7-6 m-b)^ +(8-9 m-bf. 

Bu fonksiyonun hangi m ve b değerleri için minimum değeri aldığını belirlemeliyiz. 

Kısmi türevleri hesaplayalım: 

FJjn, 6)=2(4-2m-6)(-2)+2(6-5m-6)(-5)+2(7-6m-6)(-6) +2(8-9m-6)(-9)=0, 

Fb (m,b)=2(4-2m-b )(-1 )+2(6-5m-6)(-1 )+2(7-6m-6)(-1) +2(8-9m-6)(-1 )=0. 

Bir miktar aritmetik işlemden sonra aşağıdaki denklem sistemi elde edilir: 

Jl46/u + 226 = 152 
[ 22 m +4 b= 25 

Bu sistemi yoketme yöntemi ile çözelim. İkinci denklem -11/2 ile çarpılıp birinci denkleme 
toplanırsa 

25 m = 14.5 => m = 0.58 

ve m nin bu değeri ikinci denklemde yerine konulursa 

12.76 + 46 = 25 ^46 = 11.24 ^6 = 3.06 

elde edilir. Görüldüğü gibi, sistemin tek çözümü vardır: m = 0.58 , 6 = 3.06. m ve 6 nin 
bu değerleri için F(m,b) nin minimum olduğunu biliyoruz. 

O halde regresyon doğrusu 

v=0.58x+3.06 

dur. Başka bir deyimle, regresyon analizi sonucu ortaya çıkan gider fonksiyonu 
C(x)=0.58x+3.06 

Denklemi ile verilenen fonksiyondur. Üretici, örneğin, 4 ürün üretince giderinin ne olacağını 
tahmin edebilir: 

C(4)=(0.58)(4)+3.06 =2.32+3.06 = 5.38. 


Bu örnekle ilgili olarak veri noktalarını ve regresyon doğrusunu gösteren bir grafiği bir 
sonraki sayfada görebilirsiniz. 
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Örnek veri tablosu 


X 

2 

5 

6 

9 

y 

4 

6 

7 

8 


için bulduğumuz regresyon doğrusu veri noktaları ile birlikte aşağıdaki grafikte gösterilmiştir. 
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Önceki örnekte izlenen yol genel duruma uygulanarak m ve b nin doğrudan hesaplanmasını 
sağlayacak formüller elde edilebilir. Artıkların karelerinin toplamı olarak tanılanan 

n 

F{m, Z>) = Z ( y t ~ mx i ~ bf = (y, - mx x - bf + • • • + (y n - mx n - bf 

i =1 

fonksiyonunun kritik noktaları 


f n \ 
2 


F Jm,b) = Z 2 iy t ~ mx i - b)(~ x i) = -2\^x" jm - 2| 

f n \ 


F m( m ’b) = Z 2 CV,- - mx i -*)(-!) = “ 2 ^ZaJ wî - 21 


ı=l 


W 

I*, 

V /=ı 7 

7 n \ 


\b + 2 


w ^ 

Zaa 

V 1=1 7 

f n \ 


= 0 


I 1 p+ 2 Za 

V/=ı 7 Vi=ı 7 


= 0 


ya da 


{f n A ( n \ 

m + 


2> 

V ı=ı 7 


V ı=ı 7 


E A kı 
1=1 


f n A 

I-, 


m + 


nb 



IV ı=ı 7 ı=ı 

denklem sistemi çözülerek bulunur. 

Bu denklem sisteminin daima tek bir çözümü bulunduğuna dikkat ediniz. 


'XZaa)-(Za)(Za) 

k -1 _ k =_1_Â__l_ 

»(Za)-(Za) 2 


Za - "XZ a) 

^ k -1 _Â__l 

Tl 


İkinci örneğimizde yukarıdaki formülleri kullanacağız. 


Örnek 2. (0,6.4), (1,2.6), (2,0.5), (3,0.6) ve (4,0.3) veri noktalarına en iyi uyan 
doğrunun denklemini bulunuz. 

Çözüm. Aranılan doğrunun denklemi y = mx + b olmak üzere veri noktalarına karşılık 
gelen aşağıdaki tabloyu oluşturalım: 


Xi 

0 

1 

2 

3 

4 

yi 

6.4 

2.6 

0.5 

0.6 

0.3 


m ve b yi yukarıdaki formüllerden elde edebilmek için bu formüldeki her bir terimin 
değerini buluruz. Öncelikle, n = 5 olduğuna dikkat ederek 





En Küçük Kareler Yöntemi 


105 


E*,.=0 + 1 + 2 + 3 + 4 = 10 , =6.4 + 2.6 + 0.5 + 0.6 + 0.3 = 10.4 

k =1 k =1 

=0 • (6.4) +1 • (2.6) + 2 • (0.5) + 3 • (0.6) + 4 • (0.3) = 2.6 + 1 + 1.8 +1.2 = 6.6 

k =1 

=0 + 1 + 4 + 9 + 16 = 30 , (Xy)(Zv İ ) = 10-(10.4) = 104 


Böylece, 


"(E^ME^KE^) 

£ = 1 _*=)_A=1_ 

«(E*ö _( E x *) 2 


5-(6.6)-104 
5-30-100 


33-104 

50 


-71 

ÜtT 


-1.42, 


Ek* ~ m (E x *) 

_ k = \ _ k =_I 

Tl 


10.4-(-1.42)-10 
5 


10.4 + 14.2 
5 


24.6 

5 


4.92. 


O halde istenilen doğrunun denklemi 

y=-1.42x+4.92 


dir. 

Örnek 1 ve Örnek 2 de görüldüğü üzere regresyon doğrusunun bulunmasında iki yol 
izlenebilir. Birinci yol, veri noktalarından artıklar ve artıkların kareleri hesaplanarak F(m,b ) 
fonksiyonunun bulunp F(ın,b) yi minimum yapan m ve b değerlerinin bulunmasıdır. 
İkinci yol ise birinci yolun genel duruma uygulanmasıyla m ve b için bulunan formüllerin 
kullanmasıdır. 

Aşağıda regresyon doğrusunun hesaplanması için bazı durumlarda daha elverişli olan bir 
yöntem daha bulunduğunu göreceğiz. 


7.3. Determinantla Çözüm. Regresyon doğrusunun bulunmasında ortaya çıkan denklem 
sistemi, genel durumda, Gramer Kuralı ile çözülerek, doğrunun denklemi için hesapları 
kolaylaştırıcı bir fonnül elede etmek mümkündür. 

Artıkları kareleri toplamı olan iki değişkenli 

n 

F(m,b) = E(k, - mx i ~ bf = (y, - mx i - b) 2 + • • • + (y n - mx n - bf 
1=1 
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fonksiyonunun kısmi türevleri sıfıra eşitlenerek ortaya çıkan 

s 

rı 

ZV 


f f n A f n \ 

2 m + 


Z-f b = 

V 1=1 y V i=l / 1=1 

y /? y zz 

Z-f m + nb = Z* 

v ;=ı 7 ı=ı 


denklem sistemi Gramer Kuralı ile çözülürse, 


m 


zz rı 

i=1 1=1 


rı rı 

Z *, 2 

z=l z=l 


Z x t y, ±xr 

i= 1 z=l 

zz 

±y t n 

i= 1 

h ~ ■ 

rı rı 

İ x i Z.V, 

z'=l z=l 


zz zz 

İ y t İ x t 

z'=l ı=l 

zz zz 

Zv Z* 

z=l z=l 

5 O ~ 

ZZ ZZ 

Z-v Z* 

z=l i=1 


zz zz 

Z-y Z* 

z=l z'=l 

zz 

Z-f n 


rı 

Z *«■ n 


rı 

Z-f n 


ı=l 


ı=l 


ı = l 


elde edilir( b nin son ifadesinin elde edilişini iyi izleyiniz). Böylece, F(m , b ) nin tam bir 

tane kritik noktası bulunduğuna ve bunun da verilere en iyi uyan fonksyonu belirlediğnne 
dikkat ediniz. O halde aranan fonksiyon, 


İ x ,y, 

z=l 

zz 

Z*, 

z'=l 


ZZ 

i™ 

1=1 

zz 

zy 

ı=l 

zz 

5>, 

1=1 

Tl 

.. v _ - - 

rı 

±y t 

i= 1 

zz 

z* 

i=l 

zz 

Z-7 

1=1 

n 

z* 

1=1 

A 

rı 

Z7 

1=1 

zz 

Z* 

ı=l 

zz 

z*< 

z=l 

n 


zz 

Z* 

z=l 

rı 


veya 


n rı 

Zv Z* 


zz zz 

Z-fy, Z-f 


zz zz 

Z-yy, Z-y 2 

1=1 ı=l 

n 

v- 

1=1 1=1 

zz 

X + 

z'=l z=l 

zz zz 

Z *«■ " 

z=l 


Z>/ » 

i=l 


Z-fı Z^ı 

z'=l z=l 
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denklemi ile belirlenmektedir. Son formülün sol tarafı, aşağıdaki 3><3 determinantın birinci 
satıra göre açılımı olduğundan bu denklem 


y x 1 

Ey 2 Ey =0 

z'=l z =1 z'=l 

rı n 

E E Ey n 

ı=l /=! 


biçiminde ifade edilebilir. Dolayısıyla, regresyon doğrusunu belirlemek için yukarıdaki 
detenninantın son iki satırındaki girdiler bulunup yerine yazılarak determinant açılr ve arzu 
edilen denklem ortaya çıkar. 


Örnek 1 . Daha önce çözdüğümüz bir problemin veri tablosu olan aşağıdaki tablo için en 
küçük kareler doğrusunu determinant kullanarak bulalım. 


X 

2 

5 

6 

9 

y 

4 

6 

7 

8 
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Böylece, 

y x 1 

152 146 22 = (4 • 146-22 • 22)y-(4 • 152 - 22 • 25)x + (152 • 22 -146 • 25) = 0 
25 22 4 

ve buradan, en küçük kareler doğrusunun denklemi 


ya da 


olarak elde edilir. 


lOOy -58x-306 = 0 


y = 0.58x + 3.06 


Örnek 2. Aşağıdaki veri tablosu için en küçük kareler doğrusu(regresyon doğrusu)nu 
bulunuz ve x = 15 için y yi tahmin ediniz. 

IcT 14 

8 12 


Bu tabloya karşılık gelen nokta kümesi 

(2,-4), (6,0), (10,8), (14,12), (18,14) 

tür. jCj=2 , y x =-4, .... 

Böylece, 

. =-8 + 0 + 80 + 168 + 252 = 492 , Jx, 2 = 4 + 36 +100 +196 + 324 = 660 , 

/=1 j=l 

Y j x i =2 + 6 + 10 + 14 + 18 = 50 , =-4 + 0 + 8 + 12 + 14 = 30 , 

j=l /=1 

=2 + 6 + 10 + 14 + 18 = 50 , n = 5. 
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Elde edilen değerler detenninant formülünde yerlerine yazdınca 

y x 1 

492 660 50 = (5 • 660 - 50 • 50)y - (5 • 492 - 30 • 50)x + (492 • 50 - 30 • 660) = 0 
30 50 5 

ve buradan 

800y - 960x + 4800 = 0 => y = 1,2x -6 


bulunur. Böylece, regresyon doğrusunun denkleminin y = (1,2)x - 6 olduğu görülür. 

x=l 5 için y = 18-6 = 12 olur. 

En küçük kareler yöntemi ile çözülebilecek bir fiyat analizi problemi örneği veriyoruz. 


Örnek 3. Bir büyük mağaza zincirinin pazar araştırmaları 
bölümü belli bir ürünün fiyatını her ay değiştirerek 5 ay 
boyunca aylık talebi kaydetti ve yandaki veri tablosunu elde etti. 

Burada, x, birim para(bp) olarak satış fiyatını; y, aylık kaç bin 
adet talep olduğunu göstermektedir. 

a) En küçük kareler yöntemini kullanarak fiyat-talep 
denklemini bulunuz. 

b) Bir adet ürünün maliyeti 4 bp ise, aylık kârın maksimum olması için satış fiyatı 
ne olmalıdır? 

Çözüm, a) Son elde ettiğimiz determinant formülünü kullanalım. Problemimiz için 

y x 1 

n n rı 

IX v / =0 

i=\ i =1 i =ı 

n n 

Z-h n 

i =1 1=1 

determinantın ikinci ve üçüncü satırlarındaki girdileri 
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2 x,y, =10 + 9.9 + 8.4 + 7.8 + 7.7 = 43.8 , £x 2 = 25 + 30.25 + 36 + 42.25 + 49 = 182.5 , 

i =1 i =1 

5 5 

=5 + 5.5 + 6 + 6.5 + 7 = 36 , = 2 +1.8 + 1.4 +1.2 + 1.1 = 7.5 , 

z=l z=l 

5 

=5 + 5.5 + 6 + 6.5 + 7 = 30 , n = 5 

i =1 

tir. Bu değerler yerleştirilince 

v x 1 

43.8 182.5 30 = (5 • 182.5-30 • 30)y - (5 • 43.8 - 30 • 7.5)x + (43.8 • 30 - 7.5 • 182.5) = 0 
7.5 30 5 

ve buradan 

12.5y + 6x-54.75 = 0 

elde edilir. Böylece fiyat talep denklemi( x fiyatı ve y talebi göstermek üzere) 

y = -0.48x + 4.38 

olarak elde edilir. 

b) Bir ürünün maliyeti 4 bp ise, başka gider olmadığı varsayılarak, toplam gider, 

C = 4y = 4(-0.48x + 4.38) = -1.92x + 17.52 

bp olur. Toplam gelir ise 

R = vx = -40.8x 2 + 4.38x 

olacağından, kâr fonksiyonu 

P = R-C = - 0.48x 2 + 4.38x -(-1,92x + 17.52 )= - 0.48x 2 + 6.3x -17.52 
olur. Kârın maksimum olması için 

P'=- 0.96x +6.3 = 0 x « 6.56 , 


satış fiyatı yaklaşık olarak 6.56 bp olmalı. 
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Problemler 7 


1. Aşağıdaki veri tablolarından her biri için en küçük kareler doğrusu(regresyon doğrusu)nu 
bulunuz. Veri tablosuna karşılık gelen noktaları ve regresyon doğrusunu grafikle gösteriniz. 

a) b) 


X 

1 

2 

3 

4 

y 

1 

3 

4 

3 


X 

1 

2 

3 

4 

y 

8 

5 

4 

0 


c) Ç) 


X 

1 

2 

3 

4 

5 

y 

2 

3 

3 

2 

3 


X 

1 

2 

3 

4 

y 

2 

3 

3 

2 


2. Aşağıdaki veri tablolarından her biri için en küçük kareler doğrusu(regresyon doğrusu)nu 
bulunuz ve verilen x değeri için y yi tahmin ediniz. 


a) b) 


X 

1 

2 

3 

4 

y 

3 

1 

2 

0 


X 

0 

5 

10 

15 

20 

y 

10 

22 

31 

46 

51 


x=2.5 için y yi 


x=25 için y yi 

tahmin ediniz 


tahmin ediniz 


c) Ç) 


X 

-1 

1 

3 

5 

7 

y 

14 

12 

8 

6 

5 


X 

1 

4 

6 

8 

y 

1 

2 

3 

4 


x=2 için v yi 


x=5 için v yi 

tahmin ediniz 


tahmin ediniz 
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3. Bir büyük mağaza zincirinin pazar araştırmaları bölümü belli bir ürünün fiyatını her ay 
değiştirerek 5 ay boyunca aylık talebi kaydetti ve aşağıdaki veri tablosunu elde etti. Burada, 
x, YTL olarak satış fiyatını; y, aylık kaç bin adet talep olduğunu göstermektedir. 


X 

10 

10.5 

11 

11.5 

12 

y 

8.5 

8 

7 

6 

4.5 


a) En küçük kareler yöntemini kullanarak fiyat-talep denklemim bulunuz. 

b) Bir adet ürünün maliyeti 7 YTL ise, aylık kârın maksimum olması için satış fiyatı 
ne olmalıdır? 


4. Bir matematik sınıfındaki öğrencilerden 10 unun dönem içi not ortalamaları ile dönem 
sonu sınavından aldıkları notlar aşağıdaki tabloda verilmiştir: 


Dönem İçi 

40 

55 

62 

68 

72 

76 

80 

86 

90 

94 

Dönem Sonu 

30 

45 

65 

72 

60 

82 

76 

92 

88 

98 


Bu tablo için regresyon doğrusunu bulunuz. Dönem içi not ortalaması 70 olan bir öğrencinin 
dönem sonu sınavından alacağı notu tahmin edininz. 


5, (1 , 1.5), (2, 0.8), (3 , 1.7), (4,3.8) ve (5,7.6) veri noktalarına en iyi uyan doğrunun 
denklemini bulunuz. 


6, (0,7.4), (1 , 3.6), (2 , 1.5), (3,0.6) ve (4 , 1.3) veri noktalarına en iyi uyan doğrunun 
denklemini bulunuz. 


7, Bir matematik dersinin ilk iki arasınavında 7 öğrencinin aldığı notlar aşağıdaki tabloda 
gösterilmiştir. 


Birinci arasınav : x 

72 

34 

96 

72 

0 

37 

72 

İkinci arasınav : y 

35 

10 

85 

70 

20 

10 

75 


a) Bu verilere en iyi uyn doğrusal fonksiyon y = mx + b için m ve b yi birinci 
ondalık basamağına yuvarlayarak bulunuz. 

b) Birini arasınavdan 49 almış ve ikinci arasınavı kaçırmış bir öğrenci, ikinci 
arasınava girmiş olsaydı bu sınavdan kaç puan alması beklenirdi? 







